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Verfahren zur BenuttderfDhrung eeves biometrischen Systems mtt 

FlNGERABDRUCKEBSfGABE 

Die Erfindung bezieht sich auf ein Verfahren zur Benutzerfuhrung eines biometrischen 
Systems mit Fingerabdruckeingabe, bei welchem ein Benutzer jeweils zumindest einen 
Finger in Kontakt mit/zu einem Fingerabdrucksensor bringt und das System aus den von 
dem Sensor gelieferten Daten eine Merkmalsextraktion fur eine Speicherung und/oder einen 
Vergleich der Merkmale vornimmt. 

Die Identifizierung von Fingerabdriicken auf elektronischer Basis hat neben der bekannten 
Bedeutung in der Kriminalistik auch auf vielen anderen Gebieten erhebliche Bedeutung 
gewonnen, beispielsweise bei Kreditkarten- und Geldausgabeautomaten, bei der Zutritts- 
kontrolle zu Gebauden und Raumen, der Berechtigungskontrolle bei Computersystemen, 
Telekommunikationsgeraten etc. 

Zur Eingabe eines Firigerabdrucks in das jeweilige System dient ein Fingerabdrucksensor, 
der beispielsweise mittels optischer oder kapazitiver Sensoren oder Ultraschallsensoren die 
Fingeroberflache, genauer gesagt eine Fingerkuppe abtastet. Aus der erhaltenen Information 
werden fiir Fingerabdruckerkennung bzw. fur den Vergleich wichtige Merkmale extrahiert, 
wobei es sich um Merkmale der Papillarlinien von besonderer Bedeutung, namlich urn 
Endpunkte, Verzweigungen, Inseln und andere singulare Merkmale, insgesamt Minutien 
genannt, handelt. Dies ist beispielsweise in der WO 98/52149 der Anmelderin naher erlau- 
tert 

Fiir die laufende und iibliche Benutzung eines biometrischen Systems ist es erfbrderlich, dass 
dem System ein Referenzfingerabdruck bekannt ist, der bei einer Fingerabdruckeingabe 
durch den jeweiligen Benutzer zum Vergleich dient. Dabei besitzen Systeme oft eine Biblio- 
thek von Fingerabdriicken verschiedener Benutzer bzw. auch von mehr als einem Finger 
eines einzelnen Benutzers. Die Referenzfingerabdriicke konnen dem System beispielsweise in 
elektronischer Form zur Verfugung gestellt werden, doch gibt es viele Systeme, die dazu 
eingerichtet sind, dass ein Benutzer zunachst den noch nicht bekannt gewesenen Fingerab- 
druck eingibt und dieser Fingerabdruck dann in dem System gespeichert wird, naturlich 
zusammen mit einem Benutzernamen, Code etc. Diesen Vorgang nennt man Enrollment, im 
Gegensatz zu dem sogenannten Matching, bei welchem beispielsweise zur Identifikation ein 
Vergleich zwischen einem aktuell eingegebenen Fingerabdruck und einem in dem System 
gespeicherten Fingerabdruck erfolgt. 
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Eine Identifikation mit Hilfe von Fingerabdrucken, gegebenenfalls zusatzlich zur Eingabe 
eines Codes etc bietet aufgrund der Einmaligkeit eines Fingerabdruckes eine hohe Sicher- 
heit, wozu allerdings zu bemerken ist, dass diese Sicherheit von der Art der Merkmals- 
extraktion aus dem Fingerabdruckbild abhangt. Je genauer diese Extraktion erfolgt, um so 
mehr Merkmale stehen zur Erhohung der Sicherheit zur Verfugung. Dabei tritt die Proble- 
matik auf, dass bei der Aufhahme eines Fingerabdrucks mit Hilfe des Sensors eine groBe 
Anzahl von Fehlern auftreten konnen, welche zu einer qualitativ nicht befriedigenden Auf- 
nahme des Fingerabdrucks fuhren und sodann die Erfassung geniigend vieler Merkmale bzw. 
einen verniinftigen Vergleich unmoglich machen. 

Beispielsweise spielt bei kapazitiven Sensoren die Hautfeuchtigkeit eine groBe Rolle, und 
Verschmutzungen eines Fingers konnen auch bei anderen Sensoren zu Problemen fuhren. Da 
ublicherweise ein Fingerballen gegen eine Sensorflache gepresst werden muss, fiihrt auch ein 
zu geringer oder ein zu groBer Auflagedruck zu unbefriedigenden Fingerabdruckbildern und 
zu einer mangelhaften Qualitat, die eine Auswertung nicht ermoglicht. 

Man hat nach dem Stand der Technik versucht, den Benutzer z. B. durch farbige Lampchen 
mitzuteilen, dass ein Aufnahmevorgang noch andauert oder beendet ist, bzw. nicht erfolg- 
reich war. Dementsprechend kann sich der Benutzer verhalten, sodass er beispielsweise nicht 
wahrend des Aufnahmevorganges den Finger von dem Sensor entfernt. Falls ein Misserfolg 
angezeigt wird, wird der Benutzer den Vorgang der Fingerabdruckaufnahme von sich aus 
wiederholen. Alle diese bekannten Verfahren sind jedoch nicht befriedigend, da der Benutzer 
keine Information erhalt, was er nun eigentfich falsch gemacht hat und wie er es besser 
machen konnte. Wiederholte Fehleingaben fuhren bei vielen Systemen aus Sicherheitsgrun- 
den zu Blockierungen und sind daher auBerst unerwunscht. 

Eine Aufgabe der Erfindung liegt darin, ein Verfahren anzugeben, welches bei der Fingerab- 
druckeingabe eine optimierende Benutzerfuhrung ermoglicht, so dass die oben genannten 
Nachteile und Probleme weitgehend vermieden sind. 

Diese Aufgabe wird mit einem Verfahren dereingangs genannten Art gelost, bei welchem 
erfindungsgemaB dem Benutzer in Abhangigkeit von der Sensor/Finger-Interaktion optische 
und/oder akustische Anweisungen iibermittelt werden, welche auf eine Optimierung der 
seitens des Sensors gelieferten Information nach vorgebbaren Kriterien abzielen. 

Der Benutzer erhalt einen besonderen Anreiz zur Mithilfe bei der Optimierung, wenn die 
Anweisungen eine Darstellung des aktuellen von dem Sensor erfassten Fingerabdrucks 
enthalten. ZweckmaBig ist es dabei, wenn zu der Darstellung des aktuell von dem Sensor 
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erfassten Fingerabdrucks eine SoIIgeometrie eingeblendet wird, wie eine Sollflache oder 
Solllage. 

Besondere Vbrteile bringt die Erfindung auch, wenn die Anweisungen optimierende Infor- 
mationen beziiglich einer physikalischen Korrektur der Fingeroberflache, wie Anfeuchten, 
Trocknen oder Reinigen beinhalten. 

Andererseits kann es zusatzlich oder alternativ auch vorteilhaft sein, wenn die Anweisungen 
optimierende Informationen beziiglich der Anpresskraft des Fingers gegen eine Sensorober- 
flache beinhalten. 

Bei einer zweckmaBigen Variante der Erfindung ist weiters vorgesehen, dass die dem Sensor 
gelieferten Daten einer Bilderfassung zugefiihrt und deren Bilddaten einer Qualitatsbewer- 
tung unterzogen werden, wobei dem Benutzer nur dann optimierende Anweisungen iiber- 
mittelt werden, falls die Qualitatsbewertung ein Qualitatsmafi eigibt, das unterhalb eines 
vorgebbaren Minimums liegt. In der Praxis hat es sich dabei als zweckmaBig erwiesen, wenn 
die Qualitatsbewertung auf Basis von Einzelmerkmalen erfolgt, aus welchen ein Gesamtqua- 
litatsmaB abgeleitet wird. Dabei kann ein bewertetes Einzelmerkmal, beispielsweise die 
Strukturauspragung der Fingerabdrucklinien, die bedeckte Sensorflache, die GleichmaBigkeit 
der Grauverteilung oder Prozentsatz defekter Sensorpixel sein. 

Die gestellte Aufgabe wird auch mit einem biometrischen System zur Durchfiihrung des 
Verfahrens gemaB den oben angegebenen Merkmalen gelost. 

Die Erfindung samt weiteren Vorteilen ist im folgenden anhand beispielsweiser Ausfuhrun- 
gen naher erlautert, die in der Zeichnung veranschaulicht sind. In dieser zeigen 

• Fig. 1 in schematischer Darstellung den Ablauf des erfindungsgemaBen Verfahrens bei 

einem biometrischen System, 

• Fig. 2 eine-mogliche in Fig. l skizzierte Bildschirmdarstellung mit Anweisungen fur 

einen Benutzer in groBerem MaBstab und 

• Fig. 3 eine weitere Bildschirmdarstellung aus Fig. l, vergroBert. 

GemaB Fig. l besitzt ein biometrisches System, beispielsweise ein solches, das die Zugriffsbe- 
rechtigung zu einem Computernetz steuert, eine Fingerabdruckeingabe FAE, wie sie z. B. in 
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Zusammenhang mit einer Computennaus in der WO 00/38096 und der WO 00/38105 der 
Anmelderin geoffenbart ist. 

Diese Fingerabdruckeingabe FAE enthalt einen Fingerabdrucksensor FAS, der z.B. als 
Halbleiterchip ausgebildet ist und auf elektrooptisch oder kapazitiven Verfahren beruhend 
die Oberflache einer Fingerkuppe abtastet, die zu diesem Zweck auf eine Auflageflache gelegt 
wird, welche mit dem Fingerabdrucksensor integriert sein kann. 

Die seitens des Sensors FAS gelieferten Daten gelangen fiber eine elektronische Bilderfassung 
BEF zu einer Bildqualitatsbewertung BQB. Hier werden verschiedene Merkmale des erfass- 
ten Fingerabdrucks erhoben, insbesondere die Strukrurauspragung der Fingerabdrucklinien 
die von dem Finger bedeckte Sensorflache, die GleichmaBigkeit der Grauverteilung, der 
Prozentsatz allfallig defekter Sensorpixel etc. 

Je nach Anwendung wird durch unterschiedliche Gewichtung der einzelnen Qualitatsmerk- 
male ein Gesamt-BUd-QualitatsmaB abgeleitet Falls dieses MaB ein vorgebbares SollmaB 
erreicht, erfolgt die ubliche Bildverarbeitung mit Merkmalsextraktion und daraufhin entwe- 
der ein Enrollment, eine Verifikation oder eine Identifikation in ublicher Weise. 

FaUs jedoch das Gesamt-QualitatsmaB das SollmaB nicht erreicht, wird eine Feedback-Logik 
aktiviert, welche auf eine Optimierung der seitens des Sensors FAS gelieferten Informationen 
abzielt Dazu wird eine Wissensbasis eingesetzt, in welcher z. B. die Eigenschaften und 
Probleme bei der Aufnahme mit dem verwendeten Sensor abgespeichert sind. Dazu gehoren 
die Art, d.h. des Funktionsprinzip des Sensors, die Abmessungen der Sensorflache etc. 
Beispielsweise enthalt die Wissensbasis fur einen kapazitiven Sensor die Information dass 
feuchte oder nasse Haut zu Bildern fiihrt, die zu dunkel sind, sehr trockene Haut hingegen zu 
hellen Bildern. " 0 

Es kann somit die Ursache fur eine Bfldruckweisung durch die Qualitatsbewertung erkannt 
werden, sodass eine moglichst genaue Anweisung an den Benutzer ausgegeben werden kann, 
welche bei Beachtung durch den Benutzer zu einer Optimierungdes Bildes fuhrtr- 

Links in Fig. 1 sind zwei Bildschirmdarstellungen mit Anweisungen an den Benutzer darge- 
stellt, die weiter unten naher beschrieben werden. Bei einer der drei hier gezeigten moglichen 
optischen Anweisungen in dem dritten Feld von oben ist eine Bildschirmdarstellung mit 
einem bereits erfassten Fingerabdruck gezeigt. Durch die Eingabe eines zweiten Bfldes soil 
die Flache und Qualitat dieses bereits erfassten Fingerabdrucks verbessert werden. Umriss 
und relative Lage des zweiten Bildes in Bezug auf das erste sind symbolisch als Raster darge- 
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stellt. Somit kann der Benutzer wahrend der Bewegung des Fingers erkennen, inwieweit die 
Flache des ersten Fingerabdruckes durch die Eingabe des zweiten Bildes vergroBert werden 
kann. Zusatzlich wird ihm fiber die Farbe des Rasters mitgeteilt, wie das System den Quali- 
tatszuwachs des Fingerabdrucks durch das zweite Biid bewertet: Griine Farbe bedeutet dabei 
einen aus Sicht des Systems optimalen Kompromiss zwischen der Verlasslichkeit der relati- 
ven Lageabschatzung und der erzielten FlachenvergroBerung. Gelbe Farbe zeigt dagegen an, 
dass nur eher geringes Verbesserungspotential durch die Eingabe des zweiten Bildes moglich 
ist, beispielsweise dann, wenn das zweite Biid vollstandig im ersten enthalten ist. Rote Farbe 
deutet darauf hin, dass sogar schon die raumliche Zuordnung der Bilder zweifelhaft und 
daher eine Verbesserung nicht zu erwarten ist 

Aufierdem ist gezeigt, dass Anweisungen gegebenenfalls auch iiber einen Drucker PRI ausge- 
geben werden konnen oder zusatzlich bzw. in einfachen Fallen auch alleine fiber eine Punkt- 
matrix PMA. Diese Punktmatrix kann beispielsweise, wie hier gezeigt, aus vier Leuchtdioden 
bestehen, welche dem Benutzer eine Richtungskorrektur hinsichtlich der Auflage des Fingers 
auf dem Sensor anzeigen. Im vorliegenden Fall soli der Benutzer den Finger in Richtung des 
blinkenden Pfeils verschieben, um eine Verbesserung der Bildqualitat zu erreichen. Die 
Punktmatiixanzeige kann auch hier durch Anderung der Anzeigefarbe den Benutzer fiber die 
Qualitatssteigerung oder -verminderung informieren, beispielsweise durch einen Ubergang 
von grfin auf rot oder umgekehrt. 

Aus Fig, 2 erkennt man eine mogliche Anzeigestruktur mit Anweisungen fur ein Enrollment 
In dem groBen Feld links CFinger Data") ist die Sensorflache dargestellt, und in diese ist der 
tatsachlich aufgenommene Bereich eines Fingers eingeblendet. Der Benutzer erkennt somit 
hier, dass im Augenblick sichtlich zuwenig seiner Fingeroberflache erfasst wird. Unterhalb 
dieses Feldes sind drei Felder vorgesehen, welche bei dem betrachteten Beispiel anzeigen, 
wie viele von drei ffir ein Enrollment erforderlichen Fingerabdrucken bereits abgenommen 
und verarbeitet wurden. Im vorliegenden Fall ist angezeigt, dass bereits ein Fingerabdruck 
verarbeitet wurde, jedoch noch zwei weitere Qeere) Felder erforderlich sind. 

In dem Feld rechts oben mit den~beiden Handen soil eine mogliche Anzeige veranschaulicht 
sein, die angibt, welcher der Finger einer Hand als Nachster der Fingerabdruckeingabe 
zugeordnet werden soli. Im vorliegenden Fall ist der Zeigefinger der rechten Hand bereits 
erfasst worden, was durch das verdunkelte runde Feld gezeigt ist, wogegen als nachster 
Finger der Mittelfinger der rechten Hand der Fingerabdruckeingabe zugefuhrt werden soil, 
was hier durch einen Pfeil gezeigt ist. 



BNSDOCID: <WO. 02077907A1.J. > 



WO 02/077907 PCT/DE02/00898 

-6- 

Unterhalb des soeben beschriebenen Feldes ist eine bildliche Anweisung mit Text gezeigt, 
gemaB welcher die Anpresskraft des Fingers gegen die Auflageflache des Sensors FAS erhoht 
werden soil. Darstellungen gemaB Fig. 2 erfordern natiirlich einen Monitor, der jedoch im 
Zusammenhang mit PC-L6sungen ohnedies vorhanden ist. 

Bei der Darstellung nach Fig. 3 wird auf einem Monitorbild im Zusammenhang mit einem 
Matching dem Benutzer eine Anweisung hinsichtlich der Qualitat (Fingerprint Quality) sowie 
der tatsachlichen Auflageflache (Fingerprint Area) gegeben, was durch steigende oder fallen- 
de Balken, die in der Praxis unterschiedliche Farben anzeigen, erfolgt. Links von dieser 
Darstellung erhalt der Benutzer eine bildliche Darstellung des erfassten Fingerabdrucks im 
Vergleich zur gesamten Sensorflache. Im vorliegenden Fall wird eine Schrift eingeblendet 
(IMPRESSION TOO SMALL), welche darauf hinweist, dass die Gesamtabdruckflache zu 
gering ist. In dem gezeigten Beispiel wird der Benutzer daher versuchen, durch entsprechen- 
des Verschieben oder starkeres Aufdracken etc. seines Fingers diese Flache zu vergroBern, 
wodurch auch der Balken rechts (Fingerprint Area) hoher werden und ein erfolgreicher 
Vergleich ermoglicht wird. 

Bei der Erfindung stehen daher das Feedback und die Bildqualitatsbewertung zueinander in 
einer wechselseitigen Beziehung bzw. einem ursachlichen Zusammenhang. Die Bildqualitats- 
bewertung scheidet Fingerabdrficke minderer Qualitat aus, die fur eine weitere Verarbeitung 
und/oder Merkmalsextraktion nicht geeignet erscheinen, und das Feedback analysiert die 
Ursache fur die Bildriickweisung und verdeutlicht dann dem Benutzer die Systemsicht. Eine 
prazise Diagnose in Verbindung mit einem Vorwissen (Wissensbasis) fiber mogliche Prob- 
lemursachen ermoglicht die Formulierung konkreter Losungsvorschlage, im besonderen fiber 
eine Visualisierung, welche natiirlich auf die Gegebenheiten und die technischen Moglich- 
keiten des verwendeten Systems abzustimmen ist. 

Ein Wesen der Erfindung liegt ersichtlicherweise darin, dass sie dem Benutzer zu einem 
bestimmten Verhalten im Umgang mit einem biometrischen System ffihren kann. Allfallige 
Probleme werden fur den Benutzer transparent und allgemein verstandlich dargestellt, 
sodass, ein kooperatives Verhalten des Benutzers vorausgesetzt, durch die mteraktion mit 
dem System die Erkennungsleistung gesteigert und beispielsweise eine Zugangskontrolle 
deutiich komfortabler gestaltet werden kann. 

Die Erfindung beriicksichtigt auch ein immer wieder vorkommendes unerwartetes bzw. 
unerwfinschtes Verhalten eines Benutzers ebenso, wie den Umstand, dass die Hautbeschaf- 
fenheit in Kombination mit dem jeweils angewandten Messprinzip ein limitierender Faktor 
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Natiirlich kann auf die an sich optimale bildliche Darstellung auf einen Monitor verzichtet 
werden und es konnen Meldungen fiber einfache LCD-Displays oder in gedruckter Form 
ausgegeben werden, von welchen einige zur Veranschaulichung angefuhrt sind: 

• „Bitte Finger auflegen" 

• „Bitte Sensor reinigen" 

• „Sensorflache moglichst zur Ganze bedecken" 

• „Etwas fester aufdriicken" 

• „Bitte Finger moglichst in der Sensormitte positionieren" 

• M Haut/Sensor zu feucht - bitte trocken reiben" Cbei kapazitiven Sensoren) 

• „Haut zu trocken - bitte leicht anhauchen" (bei kapazitiven Sensoren) 

Insbesondere fur das Enrollment, das im allgemeinen den ersten Kontakt des Benutzers mit 
dem System darstellt und in Folge die Wiedererkennung maBgeblich bestimmt, ist die Erfin- 
dung von besonderem Vorteil, da sie die geeignete Benutzerfuhrung ermoglicht. Im Falle 
eines weiter oben bereits kurz angesprochenen Fusions-Enrollments, bei dem mehrere 
Aufhahmen eines Fingers zu einer einzigen Referenz verschmolzen werden, kann etwa durch 
eine farbliche Codierung der Gitterlinien (siehe Fig. 2, Fig. 3) im Sinne der ublichen Ampel- 
farben, die Erfolgswahrscheinlichkeit fiir eine Verschmelzung ausgedriickt werden. Relativ 
komplexe Sachverhalte konnen Dank der Erfindung fur die Benutzer transparent und auf die 
vergleichsweise einfache Aufgabe reduziert werden, die Erfolgsaussichten durch Variation 
der Sensor-/Finger-Interaktion zu maximieren. 
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PATENTAN SPRlJCHE 

1. Verfahren zur Benutzerfuhrung eines biometrischen Systems mit Fingerabdruckeinga- 
be, bei welchem ein Benutzer jeweils zumindest einen Finger in Kontakt mit/zu einem 
Fingerabdrucksensor bringt und das System aus den von dem Sensor gelieferten Daten 
eine Merkmalsextraktion fur eine Speicherung und/oder einen Vergleich der Merkmale 
vornimmt, 

dadurch gekennzeichnet, dass 

dem Benutzer in Abhangigkeit von der Sensor/Finger-Interaktion optische und/oder 
akustische Anweisungen ubermittelt werden, welche auf eine Optimierung der seitens 
des Sensors gelieferten Information nach vorgebbaren Kriterien abzielen. 

2. Verfahren nach Anspruch l, dadurch gekennzeichnet, dass die Anweisungen eine 
Darstellung des aktuell von dem Sensor erfassten Fingerabdruckes enthalten. 

3- Verfahren nach Anspruch 2, dadurch gekennzeichnet, dass zu der Darstellung des 
aktuell von dem Sensor erfassten Fingerabdruckes eine Sollgeometrie eingeblendet 
wird, wie eine Sollflache oder Solllage. 

4- Verfahren nach einem der Anspriiche l bis 3, dadurch gekennzeichnet, dass die 
Anweisungen optimierende Informationen beziiglich einer physikalischen Korrektur 
der Fingeroberfiache, wie Anfeuchten, Trocknen oder Reinigen beinhalten. 

5. Verfahren nach einem der Anspriiche 1 bis 4, dadurch gekennzeichnet, dass die 
Anweisungen optimierende Informationen beziiglich der Anpresskraft des Fingers ge- 
gen eine Sensoroberflache beinhalten. 

6. Verfahren nach einem der Anspriiche 1 bis 5, dadurch gekennzeichnet, dass die 
dem Sensor gelieferten Daten einer Bilderfassung zugefuhrt und deren Bilddaten einer 
Qualitatsbewertung unterzogen werden, wobei dem Benutzer nur dann optimierende 
Anweisungen ubermittelt werden, falls die Qualitatsbewertung ein QualitatsmaB ergibt, 
das unterhalb eines vorgebbaren Minimums liegt. 
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7. Verfahren nach Anspruch 6, dadurch gekennzeichnet, dass die Qualitatsbewer- 
tung auf Basis von Einzelmerkmalen erfolgt, aus welchen ein GesamtqualitatsmaB ab- 
geleitetwird. 

8. Verfahren nach Anspruch 7, bei welchen ein bewertetes Einzelmerkmal die Struktur- 
auspragung der Fingerabdrucklinien ist. 

9. Verfahren nach Anspruch 7 und 8, bei welchen ein bewertetes Einzelmerkmal die 
bedeckte Sensorflache ist. 

10. Verfahren nach einem der Anspriiche 7 bis 9, bei welchen ein bewertetes Einzelmerk- 
mal die GleichmaBigkeit der Grauverteilung ist. 

11. Verfahren nach einem der Anspriiche 7 bis 10, bei welchen ein bewertetes Einzelmerk- 
mal der Prozentsatz defekter Sensorpixel ist. 

12. Biometrisches System zur Durchfiihrung des Verfahrens nach einem der Anspriiche 1 
bis u. 
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